查看原文
其他

老司机的姿势,2016网易云技术实战精华总结

2017-01-12 共创云上精彩世界 网易云

2016年全面加入云计算大战的网易云,却是一个技高活好的老司机,通过几张图,大家对网易云的能力有了一个全面的认识。然而,极客范的你,应该希望了解更多技术原理、演进。其实,网易云老司机已经为你精心准备更多的“姿势”,本文再次梳理一下这些“姿势”,供你品鉴。


网易云老司机的技术底蕴

从2006年创立开始,网易杭州研究院就为网易公司快速发展互联网业务积累了大量实用的技术,现在,从服务端架构、性能,前端架构、移动开发,到数据挖掘,再到深度学习、人工智能,在每一个技术方向上,网易云都已经是不折不扣的老司机。


基础服务

  • 高可用的PB级对象存储

    在现代云计算体系结构中,对象存储是重要的组成部分,对内提供海量数据的高可靠存储能力,具备极高的可扩展性;对外提供高速稳定的统一HTTP协议访问接口,支撑用户的高并发高带宽访问。随着2016年网易云产品化的浪潮,网易对象存储NOS已经开放了对外的公有云版本,并已为多家企业级用户提供线上服务。一个最初只有6、7台服务器的小集群如何一步步发展,最终成长为一个为网易百余个项目提供数据服务的成熟平台?了解详情>>>


  • 十年一剑,网易分库分表数据库DDB

    伴随着网易博客的成长,网易分库分表数据库中间件DDB集群也从最早的20+节点,到40+节点,最后到现在云端100+个RDS实例。除了博客外,十年来DDB也支撑了易信、网易云音乐、网易云阅读、网易考拉海购等其他大体量应用。目前DDB在网易内部有近50个产品使用,最大集群过百数据节点,大部分部署在云端,为应用提供透明、无侵入、MySQL标准协议的分库分表服务。十年来,DDB经历了三次服务模式的重大更迭,从最早的Driver模式,到后来的Proxy模式,再到近几年的云模式,DDB服务模式的成长也深刻反映着互联网流行架构的变迁。了解详情>>>


大并发/高可用

  • 电商大促精心测试实践

    一次大促的成功不仅取决于市场的推广、运营的设计,和产品的稳定性更是密不可分,对于测试和开发来说,同样在性能、体验和大并发访问稳定性等方面面临巨大的挑战。应对一次电商大促性能测试,整个流程中需要进行需求抽取,包含得到一些预期指标以及测试场景等。然后针对需求进行方案设计,包括场景设计以及选取测试手段等。在方案设计的基础上,即可进行测试执行。最后,根据测试的结果整理测试报告并提出潜在的风险。了解详情>>>


  • 分布式转码服务高可用浅析

    分布式高可用性系统模型无非就是中心化和去中心化两种设计方式。中心化的设计,数据和管理高度统一,简单可行,但是缺点是模块高度集中,容易形成性能瓶颈,并且如果出现异常,就可能群龙无首。无中心化的设计,某个节点的异常不会影响整体系统,仅仅是局部不可用,但是协议比较复杂,而且需要在各个节点间同步信息。网易云视频团队通过MySQL共享存储方式,实现了分布式视频处理系统节点管理中心的中心化高可用。了解详情>>>


前端架构

  • 前端开发技术的发展大概可以分为三个阶段,2015年ES6标准的确立标志着前端领域正式进入了蒸汽时代。但离流水线作业的电气时代还有一段路要走。网易云基础服务网易蜂巢产品前端组本着面向未来、稳步推进的原则,也对项目架构进行了优化改进,并确立了新的发展方向,他们认为,前端架构的工业化,主要应该从模块化、组件化、规范化和自动化四大方面考虑。了解详情>>>


运维

  • 企业级监控系统实践

    随着业界运维以及开发技术的发展,监控也由原先的简单的服务器指标的监控,逐步拓展到应用性能,网络,手机设备,前端页面等多个领域。网易对企业级的监控系统也做了一些有效探索和实践,本文通过对于网易的监控的实践,描述监控体系的建立过程,以及如何逐步满足一个企业级监控的需求。了解详情>>>


  • Docker容器的自动化监控实现

    Docker的运维是一个体系,而监控系统作为运维体系中重要组成部分,在Docker运维过程中需要重点考虑。网易杭州研究院运维团队提出了一种模型化容器监控方案,通过对监控对象、监控过程进行建模,基于模型来驱动整个监控场景。这套方案相比现有的容器监控实现,具有更好的灵活性和扩展性。通过模型的改进和扩展,能够方便地将Docker容器的监控融入到现有的监控和运维体系中去。了解详情>>>


安全

  • iOS APP的加固保护原理

    跟iOS开发者息息相关的问题,主要就是被破解、分析。APP被破解分析进而刷单作弊,或者APP被山寨以次充好等。APP一直以来存在的“山寨”现象,引起越来越多开发者的不满,山寨泛滥的后果将是劣币驱逐良币,打击创新者的积极性,造成恶性循环。只有在了解了它们的实现原理后,我们才能更好地保护我们的APP不被分析、破解,通过字符串加密、符号混淆、代码逻辑混淆、URL编码加密、网络传输数据加密、主动保护等策略实现。了解详情>>>


大数据/深度学习

  • Hadoop数据平台自动化管理

    网易杭州研究院的Hadoop平台由最初的10来台服务器,经过数年的发展,形成4个机房、多个线上独立集群、共数千台服务器的规模。日常运维操作包括集群扩容、用户管理、资源管理等方面。基于Hadoop数据平台在用户、资源等方面的管理需求和相关背景,以及平台的日常管理实践,大数据平台团队完成了自动化管理方案的设计和实现,减轻了运维人员的日常工作负担,极大地提高了响应速度和用户体验。后续平台将会从可视化和集群管理整合着手,进一步精细化平台管理,实现自动化和智能化。了解详情>>>


  • 图像理解与个性化推荐场景下的深度学习实践

    近几年,深度学习在图像、音频处理等领域得到了广泛的应用并取得了骄人的成绩,也网易内部也被广泛应用。本文根据项目实战经验,分享了深度学习的应用,包括一个用于图像理解的弱监督学习算法,和一个基于多维度建模的推荐算法。基于业界对深度学习存在误解的现象,作者在进入项目之前也对深度学习的概念、主流算法和关键步骤进行了科普。了解详情>>>


网易云老司机的服务创新

网易杭州研究院集技术和产品研发于一身,通过网易云产品将各种优势技术输出,解放程序员,加速创业创新,助力互联网公司,赋能企业数字化创新。网易云的场景化云服务,提供了很多精品解决方案,这里列举两个作为代表。


云数据库服务

  • 高性能、高可用、高安全的MongoDB服务

    MongoDB的强大世所公认,而数据安全问题也需要企业特别关注。网易云基础服务网易蜂巢近日重磅推出的MongoDB服务,这是业界首个上线MongoDB 3.4版本的云服务。通过网易蜂巢的MongoDB服务,用户不但能体验到MongoDB集关系型数据库和NoSQL数据库精华于一身的强大功能,还能够进一步享受到蜂巢精心准备的数据私网内安全访问、全面而灵活的实例监控、节点故障快速恢复、高效的数据自动备份等服务。了解详情>>>


视频云服务

  • 单向直播面临升级,网易视频云首推多路互动直播

    受限于传统直播模式单一的交互方式,直播平台多集中在游戏直播、秀场直播等领域,使得直播在很多垂直领域的想象力受到约束,在一定程度上不利于直播平台的良性发展。网易云推出了多路互动直播功能,在全新的架构中,主播端不再直接推流到CDN流媒体服务器,而是基于实时音视频通话系统,由实时音视频的中转服务器转发给互动直播服务器,再由互动直播服务器处理后推流到CDN流媒体服务器。这样既实现了多人互动直播,又继承了单向直播同样的推流能力。了解详情>>>


网易云老司机和谁一起在路上?

歌词说“朋友多了路好走”,老司机网易云的朋友圈也在不断扩大,路也越走越宽。在正式向市场推出公有云服务之前,网易云就首先经历了内部客户的验证,支撑了网易电商、教育、金融等业务的成长与发展。现在,除了网易考拉海购、网易云音乐、网易云课堂等,网易云还已经和宝宝树、挖财、足记等大量的外部客户伙伴,一起写下了中国云计算的新篇章。


  • 网易云课堂:用视频云技术承载3300万用户的流畅学习体验

    网易云课堂目前拥有MOOC、K12、企业云等产品线,积累的课程数量达到1.3万+,课时总数超33万,课程视频数量100万+,吸引了3,300万学习用户。借助网易视频云的专业技术,网易云课堂在视频上传、编解码、存储、播放、防下载、链路检测等核心功能的实现,都不再需要团队自己研发,既保证了服务质量以及新业务的上线速度,又节省了大量的开发人力和维护成本,让网易云课堂能够专注于业务的发展。了解详情>>>


  • 网易云音乐:2万乐迷、日均64万评论背后的云计算与深度学习

    及至2016年7月,网易云音乐平台上的乐迷数量就突破了2亿,而用户自主创建的优质歌单总数超过1亿个,平均每天诞生42万优质新歌单,累计产生超2亿条乐评。网易杭州研究院基于网易互联网业务的共性需求,利用最新的分布式、容器、大数据和深度学习等技术打造了一整套面向互联网+的云服务,涵盖弹性伸缩、高效运维等基础服务以及视频、消息推送、反垃圾等功能,为网易云音乐提供了高质量的技术支撑,让网易云音乐团队得以全身心探索音乐社交平台的差异化发展之路。了解详情>>>


  • 4亿资源打造洋货节,网易考拉海购借云计算玩双11

    截至2016年10月末,网易考拉已积累超过1,500万的忠诚复购用户,在国内跨境电商进口销售额榜单上,网易考拉名列第一。2016年双11零点大促,网易考拉海购的订单量瞬间达到平时的数倍,系统压力极大。借助网易云基础服务网易蜂巢平台,网易考拉海购完成了核心系统的分布式改造,全面实现了资源弹性和应用弹性,以保障电商系统在业务规模快速增长的情况下稳如泰山,618、双11、黑五等大规模促销的访问压力也可从容面对。了解详情>>>


  • 挖财、宝宝树、美食杰等十大高管揭秘:成功离不开云计算

    圣特尔公司CEO陈涛、光年电商CEO张国平、商派(shopex)高级副总裁徐焕春、亚信公司容器微服务业务总经理何鸿凌、挖财网基金&证券团队架构师杨琪科、宝宝树内容事业部&市场PR总监张逢、牛经数据CTO郑沛峰、好教练CEO曹汉民、网贷之家运营中心总经理吴张杰、美食杰CTO刘乃瑞等十位优秀企业高管,分享了他们借助网易云平台加速互联网业务成功的经验。了解详情>>>


小结

商业的核心是成本和效率,云计算需要具备强大、灵活的能力,也要展现给用户一个简单易用的接口,才能支持现代商业。这也注定了云计算的背后是一个复杂的系统,只有足够的技术、知识的积淀,才能造就一个高品质的云服务。业界很多人说,云计算的下半场已经开始,这说明前期的积累已经达到爆发的临界点,同时也预示着用户搭车云计算快车的最佳时机已经到来。作为老司机,背靠20年的研发和运营经验,网易云已经做好了为你服务的准备。

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存